LVS结合keepalived配置

        因为 NAT、DR 已经配置过一些操作,而使用 keepalived 操作和以前的操作是有些冲突的,所以先做一些处理。

        在 dr 上执行 :

1
2
[root@dir ~]# ipvsadm -C
[root@dir ~]# ifconfig eth0:0 down

        为什么要引入 keepalived ,之前的 lvs 虽然已经配置成功也实现了负载均衡,但是测试的时候发现,当某台 real server 把 nginx 停掉,那么 director 照样会把请求转发过去,这样就造成了某些请求不正常。所以需要有一种机制用来检测 real server 的状态,也就是 keepalived 。它的作用除了可以检测 RS 状态外,还可以检测备用 director 的状态,也就是说 keepalived 可以实现 HA 集群的功能,当然也需要一台备用 director 服务器。备用 director 也需要安装一下 keepalived 软件。两台 director 上都执行命令:

1
yum install -y keepalived

        主 director 上安装好后,编辑配置文件

1
[root@dir ~]# vim /etc/keepalived/keepalived.conf

        加入或更改如下配置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
vrrp_instance VI_1 {
state MASTER #备用服务器上为 BACKUP
interface eth0
virtual_router_id 51
priority 100 #备用服务器上为90
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.0.64
}
}
virtual_server 192.168.0.64 80 {
delay_loop 6 #(每隔10秒查询realserver状态)
lb_algo wlc #(lvs 算法)
lb_kind DR #(Direct Route)
persistence_timeout 60 #(同一IP的连接60秒内被分配到同一台realserver)
protocol TCP #(用TCP协议检查realserver状态)
real_server 192.168.0.66 80 {
weight 100 #(权重)
TCP_CHECK {
connect_timeout 10 #(10秒无响应超时)
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
real_server 192.168.0.65 80 {
weight 100
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
}

        以上为主 director 的配置文件,从 director 的配置文件只需要修改如下内容

1
2
state MASTER -> state BACKUP
priority 100 -> priority 90

        更改后从配置为

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
vrrp_instance VI_1 {
state BACKUP #主服务器上为 MASTER
interface eth0
virtual_router_id 51
priority 90 #主服务器上为100
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.0.64
}
}
virtual_server 192.168.0.64 80 {
delay_loop 6 #(每隔10秒查询realserver状态)
lb_algo wlc #(lvs 算法)
lb_kind DR #(Direct Route)
persistence_timeout 60 #(同一IP的连接60秒内被分配到同一台realserver)
protocol TCP #(用TCP协议检查realserver状态)
real_server 192.168.0.66 80 {
weight 100 #(权重)
TCP_CHECK {
connect_timeout 10 #(10秒无响应超时)
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
real_server 192.168.0.65 80 {
weight 100
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
}

        配置完成 keepalived 后,需要开启端口转发(主从都要做)

1
echo 1 > /proc/sys/net/ipv4/ip_forward

        然后,两个 rs 上执行 /usr/local/sbin/lvs_dr_rs.sh 脚本

1
sh /usr/local/sbin/lvs_dr_rs.sh

        最后,两个 director 上启动 keepalived 服务(先主后从)

1
/etc/init.d/keepalived start